Организация PCI-SIG опубликовала первую полную предварительную версию спецификаций грядущего стандарта PCI Express 7.0. Таким образом, будущий интерфейс, который удвоит пропускную способность по сравнению с PCIe 6.0, стал на шаг ближе к воплощению в реальных продуктах.

В блоге президента PCI-SIG Эла Янеса ( Al Yanes) говорится: «Продолжается работа над спецификацией PCI Express (PCIe) 7.0, которую PCI-SIG анонсировала на конференции разработчиков в США в июне 2022 года. Благодаря напряженной работе наших технических групп, мы рады сообщить, что версия 0.5 теперь доступна для ознакомления. Это официальный первый вариант спецификации, учитывающий все отзывы, которые мы получили от пользователей после выхода версии 0.3 в июне 2023 года».

Источник изображения: PCI-SIG

Янес говорит, что PCIe 7.0 ориентирован на 800GbE-решения, систем ИИ и машинного обучения, дата-центры гиперскейлеров и облака, HPC и квантовые вычисления. Отличительными чертами нового стандарта станут:

• Скорость передачи данных 128 ГТ/с, что даст в двустороннем режиме до 512 Гбайт/с в конфигурации x16;
• Использование PAM4-кодирования;
• Особое внимание к параметрам канала для уменьшения потерь;
• Обеспечение низкой задержки и высокой надежности;
• Повышенная энергоэффективность;
• Поддержка обратной совместимости со всеми предыдущими поколениями технологий PCIe.

Публикация финальной версии спецификации запланирована на 2025 год. Ожидается, что программа для проверки соответствия стандарту PCIe 7.0 будет доступна в 2027 году, а продукты будут выпущены после этого.

Одним из столпов, на которых зиждется господство NVIDIA в мире ускорителей, является NVLink — высокоскоростной интерконнект, позволяющий чипам общаться напрямую не только в составе одного узла, но и за его пределами. AMD пытается ответить на это продвижением XGMI/Infinity Fabric, и в предварительном обзоре Instinct MI300 были затронуты вопросы топологии серверов в исполнении «красных».

Ещё тогда, в момент анонса MI300, компания Broadcom объявила о поддержке данного интерконнекта в будущих поколениях своих PCIe-коммутаторов, а сейчас ресурс ServeTheHome поделился новыми подробностями. XGMI действительно станет коммутируемым, что упростит масштабирование систем на базе ускорителей AMD Instinct. Интерконнект получил официально название AFL (Accelerated Fabric Link).

В основе AFL по-прежнему будет лежать PCI Express, в данном случае речь идёт уже о PCI Express 7.0. Поддержка данной технологии дебютирует в PCIe-коммутаторах Broadcom Atlas 4. В дополнение к ним будут выпущены и новые ретаймеры Vantage 7, которые также получат поддержку CXL 4.0.

Источник здесь и далее: Broadcom via ServeTheHome

Но перед этим Broadcom начнёт поставки образцов чипов-коммутаторов Atlas 3 со 144 линиями PCIe 6.0 во II половине 2024 года, а серверы с такими коммутаторами появятся в 2025 году. Поддержка CXL здесь будет расширена до версии 3.1.

Что касается ретаймеров, то здесь Broadcom уже нанесла ответный удар Astera Labs, анонсировав чипы серий Vantage 5 и Vantage 6 для экосистем PCI Express 5.0 и PCI Express 6.0 соответственно. Они будут выпускаться в вариантах с 8 и 16 линиями с опцией бифуркации и поддержкой CXL 2.0 и 3.1.

Broadcom заявляет о более низком энергопотреблении, достигнутом за счёт применения 5-нм техпроцесса, лучших в индустрии блоках SerDes и расширенных средствах диагностики, интегрированных в новые ретаймеры.

Экономичность здесь играет важную роль: хотя даже 7-нм ретаймер потребляет немного, таких микросхем в составе каждого GPU-сервера несколько, что при дальнейшем масштабировании выливается весьма серьёзные цифры. К тому же меньшая нагрузка ляжет и на систему охлаждения, ведь если CPU и ускорители могут обслуживаться СЖО, то остальные компоненты в таких серверах по-прежнему охлаждаются обычными вентиляторами.

Что касается SerDes-блоков, то они позволят на 40 % удлинить соединения при сохранении стабильной работы. Ну а наличие продвинутого диагностического программного обеспечения с расширенными возможностями упростит разработку, отладку и ремонт систем нового поколения.

Ретаймеры Vantage 5 будут использоваться в комплекте с коммутаторами Atlas 2 в решениях Broadcom уже сегодня, они обеспечат поддержку CXL 2.0, ну а системы с Vantage 6 и поддержкой CXL 3.1, как уже упоминалось, должны увидеть свет в следующем году.

Astera Labs есть о чём беспокоиться: если на данный момент её ретаймерам почти нет альтернативы, то уже в ближайшем будущем ситуация может коренным образом измениться, поскольку Broadcom явно осознала всю важность этого компонента в экосистеме PCI Express и оценила солидный объём потенциальной клиентской базы.

Организация PCI Special Interest Group (PCI-SIG) рассказала о последних планах по развитию интерфейса PCI Express. В числе прочего были опубликованы сведения о новом стандарте кабелей и разъёмов CopprLink для подключений PCIe 5.0/6.0.

Основанная в 1992 году организация PCI-SIG опубликовала первые спецификации PCI Express в 2003 году, а сегодня без этого интерфейса невозможно представить себе ни одну мало-мальски мощную вычислительную систему. В PCI-SIG на данный момент входит свыше 950 участников.

Планы по развитию PCI Express, простирающиеся до 2028 года, показывают, что разработка новых, более производительных версий шины идёт темпами, позволяющими удовлетворить требования к скорости IO-подсистем, удваивающиеся примерно каждые 3 года. В версии PCIe 7.0 планируется довести этот показатель для x16-подключений до 512 Гбайт/с. Предварительная версия стандарта (релиз 0.3) была сформирована совсем недавно.

Источник изображений здесь и далее: PCI-SIG

На данный момент релиз спецификаций PCI Express 7.0 ожидается в 2025 году, а массовое появление новых продуктов на их основе запланировано на 2028 год. Впрочем, первые продукты наверняка появятся чуть раньше. Во II квартале 2024 года ожидается появление первых решений с PCIe 6.0, а массовый характер программа тестирования таких устройств на соответствие стандарту примет лишь в 2025.

В августе этого года была сформирована новая рабочая группа PCI-SIG Optical Workgroup, ответственная за разработку оптического интерконнекта на базе PCI Express и взаимодействие с производителями в этой области. Задача заключается в адаптации стека технологий PCIe к оптической среде передачи данных с минимальными изменениями. Новые кабели позволят организовать соединения между стойками в пределах ЦОД в случаях, когда требуется минимальная латентность.

Однако полная замена медных кабелей не планируется — оптика дополнит медь там, где нужна большая длина соединения. Поэтому PCI-SIG ведёт разработку нового стандарта электрических кабелей под общим названием CopprLink, который должен будет заменить существующие кабели OCuLink. Возможностей последних для организации внутрисистемного интерконнекта в современных условиях уже не всегда достаточно.

Новые серверы и СХД требуют более высокой пропускной способности и гибкости топологии, что учитывается при разработке CopprLink. Эти кабели позволят как обеспечивать высокоскоростные подключения в пределах самих систем, так и соединять между собой шасси в пределах стойки. Разрабатываются и варианты для межстоечного соединения.

Вопреки непроверенным слухам, CopprLink не поддерживает передачу сколько-нибудь мощного питания и не является заменой стандарту 12VHPWR. В настоящее время спецификации CopprLink, обеспечивающего работу на скоростях PCIe 5.0/6.0, уже достигли версии 0.9. Полноценный анонс технологии должен состояться в начале 2024 года.

Технология PCI Express востребована во многих сегментах, от традиционных серверов и ПК до крупных ЦОД, телеком-платформ, ИИ-кластеров, умного транспорта и даже в мобильных и носимых устройствах. Ожидается, что в период до 2027 показатель CAGR для рынка PCIe-решений составит 14 %, а к концу периода он достинет объёма $10 млрд. Быстрее всего развитие будет идти в секторе автомобильных решений (CAGR 53 % до 2030 года), периферийных сетевых (38 %) и телекоммуникационных (32 %) платформ.

Компания ABI Research, по сообщению некоммерческой организации PCI Special Interest Group (PCI-SIG), прогнозирует стремительный рост продаж оборудования с поддержкой интерфейса PCIe. Говорится, что технология будет востребована во многих сегментах, включая ЦОД, периферийные устройства, телекоммуникационные платформы, ИИ, умные автомобили, мобильные и носимые устройства.

В частности, как сообщается, объём целевого рынка PCI Express в период с 2022 по 2027 год будет демонстрировать показатель CAGR (среднегодовой темп роста в сложных процентах) на уровне 14 %. В результате, к концу рассматриваемого периода он достигнет объёма около $10 млрд.

Источник изображения: PCI-SIG

Автомобильные и сетевые периферийные устройства продемонстрируют самые высокие темпы роста. В данных секторах объём целевого рынка и значение CAGR до 2027 года покажет прибавку на уровне 53 % и 38 % соответственно. В сегменте автомобильной промышленности внедрение PCIe поможет объединить электрические и электронные системы. В случае дата-центров преимуществами использования PCI Express названы энергоэффективность, безопасность и период окупаемости.

Функция низкого энергопотребления (L0p) спецификации PCIe 6.0 будет основной движущей силой развития рынка, поскольку энергоэффективность становится центральной стратегией для пользователей, уделяющих больше внимания устойчивости и снижению эксплуатационных расходов. Вместе с тем растёт пропускная способность PCI Express: в случае стандарта PCI Express 7.0 скорость передачи данных достигнет 512 Гбайт/c к 2025 году.

PCI-SIG официально анонсировал следующую версию шины PCI Express — 7.0. Подробности о новом стандарте будут представлены позднее, ну а пока было объявлено самое главное — консорциум придерживается прежнего темпа в деле удвоения скорости передачи данных с каждым новым поколением, так что теперь одна линия PCIe 7.0 сможет предложить 128 ГТ/с (по 16 Гбайт/c в обе стороны без учёта накладных расходов). А 16 линий PCIe 7.0 — впечатляющие 512 Гбайт/с в дуплексе!

Столь высокие скорости помогут удовлетворить всё возрастающие требования к HPC-нагрузкам, машинному обучению, сетям (800GbE и выше) и прочим корпоративным задачам. Этому поможет и поддержка будущих версий стандарта CXL, который позволит в значительной степени переработать архитектуру вычислительных систем и хранилищ. Правда, появится новый стандарт только в 2025 году, а его освоение займёт ещё некоторое время.

Изображения: PCI-SIG

Финальные спецификации PCIe 6.0, напомним, были утверждены только в январе текущего года. Ряд вендоров уже представил первые блоки и контроллеры с поддержкой этого стандарта, однако даже PCIe 5.0 начнёт распространяться только в этом и следующем году, вместе с выходом следующего поколения процессоров AMD, Ampere Computing, Intel и т.д. При этом для нового стандарта понадобится более сложная и дорогая разводка плат.

И с приходом эта проблема вряд ли уйдёт PCIe 7.0, если только разработчики не начнёт переходить, например, на оптические соединения. Впрочем, PCI-SIG говорит о том, что выбор числа линий остаётся за производителем, поскольку не всегда нужно x16-подключение, да и в целом шина может легко масштабироваться и найдёт применение и в мобильных устройствах, и в суперкомпьютерах.

Но у PCIe есть конкуренты. Вместе с анонсом ускорителей Hopper и процессоров Grace компания NVIDIA представила шину NVLink 4.0 с пропускной способностью 900 Гбайт/с. По словам компании, она в 25 раз энергоэффективнее PCIe 5.0 и почти на два порядка экономичнее относительно площади используемого «кремния». При этом сохранена совместимость с CXL и UCIe. Первые продукты самой NVIDIA с этой шиной появятся в следующем году, но «зелёные» готовы сотрудничать с другими разработчиками и вендорами.